Năm Vạn Lịch thứ 32 (1604), Vinh Xương công chúa xảy ra mâu thuẫn với chồng. Minh Thần Tông biết được, đã hạ dụ trách mắng con rể của mình. Dương Xuân Nguyên phớt lờ chỉ dụ, lên kiệu quay về quê nhà ở Cố An. Minh Thần Tông tức giận đã trục xuất cha của Dương Xuân Nguyên ra khỏi triều đình, cho người đuổi theo bắt phò mã quay về kinh thành. Tuy nhiên, Dương Xuân Nguyên hối hận nên sau đó đã tự quay về kinh. Phò mã bị đưa tới Quốc tử giám để nghe thuyết giảng về khuôn phép trong 100 ngày. Cha của Dương Xuân Nguyên sau đó được phục tước. Sự kiện này được gọi là Phò mã đào quy (驸马逃归).